Использование грид-технологий для обработки и распределенного хранения сверхбольших объемов данных (сотни петабайт) (Using of Grid-Infrastructure for Distributed Processing and Storage of Enormous Amount of Data (Hundreds of Petabytes))
نویسنده
چکیده
Дается краткий обзор развития глобальной грид-инфраструктуры проекта WLCG (Worldwide LHC Computing Grid или Всемирный грид для Большого адронного коллайдера). Особое внимание уделяется архитектуре распределенного хранения сверхбольших объемов данных. Дается краткая информация о проектах развития средств мониторинга и управления распределенными файловыми системами, выполненных в ОИЯИ: система мониторинга сервиса передачи файлов FTS развитие системы управления распределенными данными эксперимента ATLAS, система мониторинга центров уровня Tier3 для анализа данных, глобальная система мониторинга передачи данных в инфраструктуре проекта WLCG. Обозначены новые решения и перспективы в обработке «Больших Данных»
منابع مشابه
Технологии Oracle для работы с Большими Данными (Oracle for Big Data)
В последние годы в мире наблюдается взрывной рост интереса к теме обработки сверхбольших объемов данных или Big Data. Проводится большое количество конференций и других мероприятий, посвященных этой теме. Практически каждую неделю появляются новые решения связанные с обработкой Big Data. В докладе будет рассказано о том, что такое Big Data, какие существуют проблемы в обработке больших данных и...
متن کاملРазработка ансамбля алгоритмов кластеризации на основе изменяющихся метрик расстояний (Development of the Clustering Algorithms Ensemble Based on Varying Distances Metrics)
В настоящее время происходит активное накопление данных большого объёма в различных информационных средах, таких как социальные, корпоративные, научные и другие. Интенсивное использование больших данных в различных областях стимулирует повышенный интерес исследователей к развитию методов и средств обработки и анализа массивных данных огромных объёмов и значительного многообразия. Одним из персп...
متن کاملИнициатива Больших данных: программы, платформы, прогнозы (Big Data Initiative: Programs, Platforms and Forecasts)
Беспрецедентный размах работ в области Big Data знаменует появление новой парадигмы в науке и в разнообразных приложениях информационных технологий (ИТ), подчеркивающей все возрастающую роль данных фактически во всех областях деятельности человека – от научных исследований, мониторинга окружающей среды, образования, здравоохранения до инновационного развития промышленности и бизнеса. Ожидается ...
متن کاملИнструменты Oracle для создания частных облаков (Oracle Tools for Private Clouds)
Термин “облачные вычисления” (cloud computing) сегодня уже достаточно хорошо известен и в IT и в бизнес кругах. Почти каждую неделю появляются новые статьи, книги, презентации об облачных вычислениях – новой сервисной модели предоставления вычислительных услуг. Широкой востребованностью облака обязаны возможности существенно оптимизировать ИТ-процессы компаний, тем самым ускоряя и повышая эффек...
متن کاملБезопасность хранения и передачи медицинских (персональных) данных при многостороннем обмене медицинской информацией по программе «Международная космическая станция» (Security Storage and Transmission of Medical (Personal) Data for the Multilateral Exchange of Medical Information in Frame of "The International Space Station" program)
Представлены итоги работы Международ ной рабочей группы по медицинской ин форматике и технологиям при Многосто роннем Совете по медицинским операциям Международной космической станции по созданию Многостороннего хранилища медицинских данных. Особое внимание при этом было уделено вопросам безопасности хранения и передачи медицинских (персо нальных) данных при соблюдении требова ний законода...
متن کامل